Это три типа механизмов пропусков в данных — и от понимания того, какой из них у вас, зависит, как правильно обрабатывать пропущенные значения.
🔍MCAR (Missing Completely at Random) Пропуски появляются совершенно случайно — не зависят ни от наблюдаемых, ни от ненаблюдаемых переменных.
📌 Пример: датчик случайно перестал записывать температуру из-за сбоя связи. ✅ Что делать: удаление строк или простая импутация — допустимо, модель почти не искажается.
🔍MAR (Missing At Random) Пропуски зависят от других наблюдаемых признаков, но не от самого недостающего значения.
📌 Пример: доход клиента не указан, но это чаще бывает у молодых пользователей — и возраст у нас есть. ✅ Что делать: множественная импутация (Multiple Imputation), модели, учитывающие другие признаки, работают хорошо.
🔍MNAR (Missing Not At Random) Пропуски зависят от самого значения, которое пропущено. То есть в данных есть систематическая причина, скрытая внутри пропуска.
📌 Пример: люди с высоким доходом не указывают его в анкете — именно потому, что он высокий. ✅ Что делать: здесь простые методы не помогут. Часто требуется: — Моделировать механизм пропуска явно. — Включать индикаторы пропусков как отдельные признаки. — Использовать экспертные знания или специализированные байесовские подходы.
Это три типа механизмов пропусков в данных — и от понимания того, какой из них у вас, зависит, как правильно обрабатывать пропущенные значения.
🔍MCAR (Missing Completely at Random) Пропуски появляются совершенно случайно — не зависят ни от наблюдаемых, ни от ненаблюдаемых переменных.
📌 Пример: датчик случайно перестал записывать температуру из-за сбоя связи. ✅ Что делать: удаление строк или простая импутация — допустимо, модель почти не искажается.
🔍MAR (Missing At Random) Пропуски зависят от других наблюдаемых признаков, но не от самого недостающего значения.
📌 Пример: доход клиента не указан, но это чаще бывает у молодых пользователей — и возраст у нас есть. ✅ Что делать: множественная импутация (Multiple Imputation), модели, учитывающие другие признаки, работают хорошо.
🔍MNAR (Missing Not At Random) Пропуски зависят от самого значения, которое пропущено. То есть в данных есть систематическая причина, скрытая внутри пропуска.
📌 Пример: люди с высоким доходом не указывают его в анкете — именно потому, что он высокий. ✅ Что делать: здесь простые методы не помогут. Часто требуется: — Моделировать механизм пропуска явно. — Включать индикаторы пропусков как отдельные признаки. — Использовать экспертные знания или специализированные байесовские подходы.
Telegram auto-delete message, expiring invites, and more
elegram is updating its messaging app with options for auto-deleting messages, expiring invite links, and new unlimited groups, the company shared in a blog post. Much like Signal, Telegram received a burst of new users in the confusion over WhatsApp’s privacy policy and now the company is adopting features that were already part of its competitors’ apps, features which offer more security and privacy. Auto-deleting messages were already possible in Telegram’s encrypted Secret Chats, but this new update for iOS and Android adds the option to make messages disappear in any kind of chat. Auto-delete can be enabled inside of chats, and set to delete either 24 hours or seven days after messages are sent. Auto-delete won’t remove every message though; if a message was sent before the feature was turned on, it’ll stick around. Telegram’s competitors have had similar features: WhatsApp introduced a feature in 2020 and Signal has had disappearing messages since at least 2016.
Launched in 2013, Telegram allows users to broadcast messages to a following via “channels”, or create public and private groups that are simple for others to access. Users can also send and receive large data files, including text and zip files, directly via the app.The platform said it has more than 500m active users, and topped 1bn downloads in August, according to data from SensorTower.Библиотека собеса по Data Science | вопросы с собеседований from es